19 ShowMe: 対話的な強調表示と拡大表示によるプレゼンテーションビデオの視覚的アクセシビリティの改善

https://scrapbox.io/files/6752bf08da693c19e20b674e.png

SECHAYK Yotam(東京大学), SHAMIR Ariel(Reichman University), 五十嵐健夫(東京大学)

ユーザ参加型のデザインによって事前に問題点や課題を抽出しWISS2023で発表された先行研究から実装改良している点が評価されている．また，弱視者のユーザ参加型デザインは有益で，実際に実用的なユーザインタフェースの設計になっている点が評価されている．他方で、読みづらい文章が多々見られる点やユーザ体験が感想のみと見受けられ，そこから研究への考察・深掘りが不足している点が指摘されている．以上の理由から，条件付き採録と判断された．

プレゼンテーションビデオを使った学習は広く一般的に行われている．講師は，ビデオ作成過程で，さまざまな視覚的補助動作を活用することが多い．具体的には，プレゼンテーション中のポインティング，マーキング，スケッチなどが，視覚的補助動作としてよく使われる．しかし，これらの動作は視覚的に認識が難しいことが多く，説明が不十分であることが多い．弱視の学習者は，このような動作に追従するために，常にプレゼンテーションのフレーム内を探索する必要があり，フラストレーションと疲労につながっている．我々は，この問題を理解し解決するために，3人の弱視ユーザとユーザ参加型デザインを実施し，その結果にもとづき，講師の視覚的補助動作を強調表示し，拡大表示するツールShowMeを開発した．ShowMeは，弱視ユーザがプレゼンテーションをフォローできるように支援し，疲労とフラストレーションを軽減する．

論文：

https://www.wiss.org/WISS2024Proceedings/data/paper//19.pdf

（フラクタル要約: https://www.fractal-reader.com/view/1f5183d6-98b3-4965-8e2d-eb3614a550c4 ）

参加者メモ・コメント

Doki Doki Waku Waku 鈴木一平 (BONSAI STUDIO).icon

😇Yotam Sechayk.icon

非常に見せ方に問題がある授業のサンプル鈴木一平 (BONSAI STUDIO).icon

講演者本人は指さししたりレーザーポインターで元素を示しているつもりでも、カメラに映ってなかったりとかでやっぱり後で見てわからん、という事故はよく起きますね…（コロナ期間に2度ほどやらかした）kentarofukuchi.icon

Zoomでの授業は私にもすごく難しいです😢Yotam Sechayk.icon

聞き逃しているかもしれないが、これは配信者が操作してINPUTする必要があるのでしょうか？それとも、既存の動画を読み取り自動的に生成されるのでしょうか。既存の動画を分析して、これが実現されるならなお良い。新しいツールの使用は、格差が生まれてしまう気がします。shugo.icon

そうですね！ユーザーが使うソフトウェアですので、できてるビデオにも支援になります。Yotam Sechayk.icon

なんか表示が増えて見づらくなった気もする鈴木一平 (BONSAI STUDIO).icon

あ、見るときにカスタムできるのか鈴木一平 (BONSAI STUDIO).icon　

見るときにもスタイルを変えます！コメントありがとうYotam Sechayk.icon

そういうことか！！デモのインパクトがすごいyuiseki.icon

ありがとうございます！！Yotam Sechayk.icon

プレゼン自体もすごく見やすいですRyo Takahashi.icon

ありがとうございます。嬉しいです🤓Yotam Sechayk.icon

パワーポイントなどのアプリでアクセシビリティチェックがあるように、動画についても自動的にチェック出来るシステムがあれば、動画作成者のほうでの対策も意識的になるのではないかと思いました。Mao NAKANO.icon

提案ありがとうございます、興味深いです！関連研究もありますが、目見えない人向けの研究です。Yotam Sechayk.icon

https://dl.acm.org/doi/10.1145/3411764.3445233

スマホで見ていると文字が小さくて見えないことが多々あるのでズームされるのはありがたいnedew.icon

確かに！コメントありがとうございます。Yotam Sechayk.icon

質疑：　どしどし書いてください。取り上げる時間がなかったらごめんなさい。西田健志.icon

質疑は日本語でも大丈夫です！

ユーザが好きに色を変えれると思いますが、コンテンツの映像によっては見にくいことが起こると思います。背景色に合わせて色が変わるという機能があったりもしますか？FUJIYOSHI Satoko.icon

コメントありがとうございます！提案がありましたら是非教えてください、開発します！デモ発表でぜひ操作してみてください🤓Yotam Sechayk.icon

3人のlow visionの人はどのようなvisual difficultiesを持っているのですか？low visionといっても見ずらい要素に個人差があると思います

論文の表1に情報が掲載されてます。もっとも、具体的な difficulties が必ずしもよくわかりませんが

確認してみます, ありがとうございます

コメントありがとう！確かにlow visionはそれぞれ。今回の参加者について論文に書いておりますが、もっと知りたい場合は説明できます！声をかけてくださいYotam Sechayk.icon

動画の前処理にはどれくらいの時間が掛かりますか？yuiseki.icon

質問ありがとうございます。現在10分の動画は大体2分で前処理完成できます！Yotam Sechayk.icon

previous : 18 InverseVis: 疎な領域へのサンプリング点生成による多次元データ中の「非存在」の可視化

next : 20 サブセグメント分割に基づく3Dスキャンモデルのインタラクティブセグメンテーション